Big Data 的主流技術之一,就是 Apache Spark。而 Databricks 就是由 Apache Spark 的創始人所創立的公司,並且提供了一個基於 Apache Spark 的資料分析平台。
Databricks 除了支援 AWS/GCP/Azure,也自行提供 SaaS 服務,讓使用者可以不用擔心底層的架構,就可以使用 Spark 進行資料分析。另外也有 Community Edition 可以試用。本系列將會使用 Databricks Community Edition 來進行開發,並視情況使用 Azure Databricks,或是 Standard Edition 進行說明。